新书速递 | 《第二语言测评与混合方法研究》（剑桥语言测试研究丛书）

编著：（美）阿雷戴恩 J. 莫勒（Aleidine J. Moeller），（美）约翰 W. 克雷斯韦尔（John W. Creswell），（英）尼克·萨维尔（Nick Saville）

导读：范劲松

ISBN：978-7-5213-1376-5

定价：96.90 元

导读（摘选）

01

简介

在应用语言学研究领域，语言测评研究往往会给人留下以定量分析为主的印象。这主要与语言测评研究的侧重点相关。长期以来，考试的效度研究一直是语言测评研究的重点，传统的效度研究模式强调对考试数据进行定量分析。近些年，混合研究方法在语言测评研究领域得到越来越广泛的应用（Turner，2014）。所谓的混合研究方法指的是在一项研究中同时采用定量和定性两种研究方法，并将定量和定性研究结果进行整合，从而能够科学、全面地理解相关研究问题。

Jang et al.（2014）指出混合研究方法在语言测评研究中之所以得到越来越多的关注，有两个重要原因。其一，它与语言测评的对象也就是语言能力相关。我们知道，要科学、有效地测量语言能力，就必须要先对其进行定义，而对语言能力和语言使用进行定义困难重重。交际语言能力涉及多个组成部分且各部分之间的关系复杂，而语言使用受到众多因素的影响。因此，单靠定量或者定性研究难以揭示语言能力和语言使用的复杂性。混合研究方法综合了定量和定性研究的特点，比单纯使用其中一种研究方法更能帮助研究者有效地理解语言能力和语言使用的本质。其二，近些年测试效度理论研究取得了重要进展。传统的效度研究忽视了考试的社会学属性（McNamara， 2001）。

Messick（1989）指出，考试的效度研究不仅要关注考试是否能够客观地体现考生的语言能力，同时也需关注考试的价值判断和后果。近些年兴起的效度论据观认为，效度研究的过程就是收集效度证据并将其组合形成效度论据的过程。在此背景下，混合研究方法在语言测评领域的兴起具有其必然性。Jang et al.（2014）对近些年在国际期刊上发表的相关论文进行系统分析后发现，采用混合研究方法的研究在语言测评领域呈现较快的增长态势。

尽管混合研究方法在语言测评研究领域得到越来越广泛的应用，但是在本书出版之前，没有专著详细探讨过混合研究方法在语言测评中的应用问题。在教育研究领域，已有多本著作出版探讨混合研究方法的理论与实践（如Creswell，2013），而且还有专门聚焦混合研究方法的学术期刊Journal of Mixed Methods Research；在语言教学研究领域也已有探讨混合研究方法的专著出版（Brown，2014）。本书的出版填补了系统介绍混合研究方法在语言测评研究中的应用这一空白。本书的三位编者中，两位从事语言测评研究，另一位从事混合研究方法理论与实践研究。这样的组合也体现了本书的宗旨，即探讨混合研究方法在语言测评开发和效度研究中的应用。

02

各章主要内容

    本书共分为四个部分，其中第一部分聚焦语言测评与混合研究方法结合时要考虑的基本因素，第二部分探讨开展混合研究方法研究的重要组成部分、主要步骤和考虑因素，第三部分展示语言测评领域采用混合研究方法的个案研究，第四部分提出混合研究方法在实际应用中的建议。下面对各章内容进行简要介绍。

第一章

本章主要介绍混合研究方法在语言测评研究领域应用的背景。首先，作者讨论了语言测评学科的性质和关注的主要问题，然后讨论该学科近些年的发展趋势。作者指出，语言测评正在从测试文化（testing culture）向测评文化（assessment culture）转变。这一发展趋势对语言测评领域具有重要意义，也是混合研究方法在该领域应用的重要学科背景。同时，交际语言教学与测试尤其是任务型教学与测试的兴起也是混合研究方法应用的重要背景。作者在本章列举了混合研究方法的多项显著优势，并以此论述在新的形势下语言测评研究领域采用混合研究方法而非单纯的定量或定性研究的必要性。

第二章

本章在前一章的基础上继续讨论混合研究方法在语言考试开发、实施和效度研究中的应用。作者首先借助于Weir（2005）提出的社会认知效度框架（socio-cognitive validity framework）探讨语言能力构念和考试的效度研究问题。作者指出，语言考试的开发是一项系统工程，涉及多个不同的步骤。为了确保语言考试的质量，语言考试开发机构应在考试开发的过程中采用质量管理制度（quality management system），混合研究方法可以为考试开发各个阶段的设计和决策提供重要证据，从而确保决策过程的科学性和合理性。

第三章

本章聚焦于混合研究方法的一些基本问题，包括混合研究方法的定义、混合研究方法作为一种新的研究范式的发展历程、混合研究方法的价值观和哲学观、开展混合研究方法研究所需要的技能、提升混合研究方法研究效度的策略以及在语言测评领域开展混合研究方法研究的建议。作者指出，混合研究方法研究并非单纯地收集定量和定性数据并将这两种数据合并；更为重要的是，混合研究方法需有效综合这两种数据从而产生新的研究结果，而这些结果单靠定量和定性数据均无法实现。

第四章

本章着重探讨混合研究方法的设计问题。首先，作者介绍了混合研究方法的组成部分。作者指出，研究人员在采用混合研究方法的过程中既可能采用归纳法，也可能采用推论法对其研究结果进行解释。如果要从定量和定性数据中获取灵感并进行有效推断，研究人员还需具备第三种思考和推理方法——溯因推理（abduction）。除了以上三种方法，作者同时介绍了混合研究方法使用中的一个重要概念——元推理（meta-inference）。所谓的元推理指的是将通过定性和定量方法得出的推理进行有效组合所形成的整体结论或解释等。在设计层面，混合研究方法可分为五种类型，包括聚合平行设计（convergent parallel design）、解释性混合研究设计（explanatory mixed methods design）、探索性混合研究设计（exploratory mixed methods design）、嵌入式混合研究设计（embedded mixed methods design） 和 多 阶 段 混 合 研 究 设 计（multi-stage mixed methods design）。除此以外，作者也介绍了方法和解释层面经常采用的策略。最后，作者从设计质量、解释的严谨性和推断的可推广性等角度探讨了混合研究方法在实际应用中的效度问题。

第五章

在本章中，作者展示了多种不同的混合研究方法步骤流程图，包括一些比较复杂的混合研究方法设计，如嵌入式聚合混合研究方法个案研究设计。本章的另一个重点是教会读者如何采用制图软件来制作混合研究方法步骤流程图。作者介绍了几种常用的制图软件，然后以PowerPoint为例详细展示了步骤流程图的制作方法，包括如何在图中展示定量和定性数据的收集和分析方法、如何为流程图添加标题和各个步骤的时间计划等。同时，作者也分享了制作流程图的一些实用建议。

第六章

对于计划采用混合研究方法的语言测评研究人员而言，第六章的内容同样非常实用。在本章中，作者论述了撰写和发表混合研究方法研究论文的十大关键要素，并对每个要素进行了详细论述，包括如何为文章拟定标题、如何撰写混合研究方法研究论文的开头部分、如何清晰地撰写研究目的、如何拟定研究问题、如何介绍研究方法的哲学基础、如何介绍研究中所采用的研究方法和步骤、如何有效呈现研究结果、如何对研究结果进行讨论，甚至包括参考书目和附录的准备等。这十大要素包括很多非常实用的具体指导和建议，相信读者和笔者一样，在读完之后感觉受益匪浅。

第七章

本章的重点是混合研究方法在语言测评效度研究中的应用。作者首先探讨测试效度的定义，指出效度包含多个不同的方面，效度研究就是系统收集效度证据并将其进行组合的过程；同时，效度研究也是持续不断的过程。作者指出，混合研究方法在效度研究中的应用可能面临重要挑战，包括：如何综合定性和定量部分的研究结果、如何确保定性和定量数据收集和分析的严谨性、如何有效呈现定性和定量部分的研究结果、如何讨论采用混合研究方法为研究增添新的价值等。作者逐一论述了这些挑战，并强调混合研究方法对于开展语言测评效度研究可能发挥的重要作用。

第八章

本章到第十一章介绍采用混合研究方法的个案研究，以实例展示混合研究方法在语言测评开发和效度研究中的重要作用。本章以国际法律英语考试（The International Legal English Certificate）为例展示混合研究方法在考试开发中的应用。本章内容对于语言测评开发人员尤其是专门用途英语（English for Specific Purposes）考试的开发人员和机构具有重要的参考价值。

第九章

对于口语测评而言，评分量表的开发和使用直接影响考试的信度和效度。本章聚焦于混合研究方法在高风险口语考试评分量表开发中的重要作用。作者指出，对于大规模口语考试而言，评分量表的开发考虑因素众多，是非常复杂的工作，而混合研究方法可以从研究方法层面为量表的开发提供重要支持。本章展示了较为复杂的混合研究方法设计在口语评分量表开发中的应用。

第十章

本章聚焦于混合研究方法在阅读测试开发与修订中的作用。本章所涉及的语言考试是剑桥大学考评部开发的一项针对高水平英语学习者的阅读测试，主要用于大学入学选拔。作者在本章中主要介绍了采用混合研究方法对该考试的内容和形式进行修订的过程。

第十一章

自Messick（1989）提出其效度理论以来，考试的影响和后果研究成为语言测评效度研究的重要组成部分。本章探讨的重点为如何将混合研究方法应用于考试的影响研究。作者指出，考试的影响研究涉及到多个不同的考试利益相关群体，如学生、教师、家长等，且各个群体关注的重点也各不相同。由于考试影响研究的涉及面和关注点众多，因此单靠定性和定量研究很难完成。混合研究方法综合定性和定量研究的优点，在考试影响研究中具有独特优势。作者以一项国际语言考试（剑桥少儿英语考试）为例，采用定量和定性平行的同步研究设计，探讨该考试对越南英语学习者所产生的影响。

第十二章

本章为本书的最后一章，主要是对本书的内容进行总结，并且给计划在研究中使用混合研究方法的研究人员提供使用建议。作者共提出了十条建议，并且对每条建议进行了具体阐述。这十条建议可分为三个部分，分别为：1）采用混合研究方法设计时所需要考虑的基本要素；2）混合研究方法研究问题的提出和研究设计；3）混合研究方法的数据收集和分析以及研究结果的呈现。在每条建议讨论结束以后，作者还提供了一些实用的操作步骤，帮助读者应对研究中的挑战。在本章的最后一部分，作者号召读者积极行动起来，在研究中尝试采用混合研究方法以解决语言测评领域的多种研究问题。

03

结语

目前，混合研究方法在我国应用语言学研究领域的应用很少。孟春国、陈莉萍（2015）将我国外语研究领域发表的论文与国际应用语言学领域同期发表的论文进行比较后发现，定量研究在国内期刊论文中占据绝对主导地位（占87.5%），定性研究数量稀少（占3.57%）；国内期刊刊载的混合研究论文数量偏少，尤其是质量上乘的研究范例数量更少。江进林（2018）对我国外语测试界在2006—2017年期间所开展的研究进行详细分析后发现，我国的外语测试研究涉及效度、反拨效应、评分等多个主题。从研究方法上来看，大部分研究采用定量或定性的研究方法，运用最多的是问卷调查与访谈，但是将定量和定性研究有效综合的混合研究设计依然少见。因此，本书对于我国的语言测评研究人员是不可多得的研究方法参考书目。书中既有对混合研究方法和语言测评的理论探讨，也有展示混合研究方法在语言测评开发和研究中实施的案例。相信读者和笔者一样，在读完本书后定会加深对混合研究方法的理解并积极尝试将其应用到自己的研究中。

范劲松
2019年3月20日

注：由于篇幅所限，参考文献与注释已省略

本书即将上架，敬请持续关注！

相关阅读